黑龙江省公安厅 | 让警务7*24小时“智慧”不断的容灾建设实践
黑龙江省公安厅作为黑龙江省人民政府下设主管全省公安工作的职能部门，承担着保障全省人民安居乐业、服务经济社会发展的重大政治和社会责任。
目前黑龙江省公安厅内某平台承载着全省范围内的查询、办理业务，随着“互联网+政务”的不断深化开展，系统数据库内汇聚了海量业务数据，由于该系统已经上线运行多年，业务系统压力大，导致数据库存在坏块，影响到了整体系统稳定性。
该系统数据库存储了大量涉及公民个人隐私的业务数据，任何的系统停机或数据丢失都将给社会、民众带来极大的负面影响。因此为保障系统稳定性及业务连续性，黑龙江省公安厅现亟需一套高可用的灾备系统，为业务数据保驾护航。
制定容灾切换计划，将生产系统切换至灾备系统。
需要对数据库坏块进行修复，保证系统的稳定性。
提升灾备系统的可运维性，可视化监控能力。
提供容灾和维护切换能力，能够在生产系统发生故障或者需要临时维护时，无需停止业务。
灾备建设可视化，更有底
针对黑龙江省公安厅的实际需求，美创科技基于多年行业积累，根据实际环境制定了灾备切换方案及坏块修复方案。
具体如下
首先通过对全库进行诊断，确认系统数据库坏块数量及位置，最终确认生产库存在索引坏块和ASM磁盘组物理坏块，且无可用的RMAN备份文件。
经过实际分析及评估，决定采用切换的方式将生产系统上的业务切换到灾备系统上，作为新生产系统使用，以解决原厂数据库物理坏块问题。
在新生产系统上修复了索引的逻辑坏块，修复以后，使用美创灾难备份管理系统重新搭建容灾系统。
数据库同步是整个容灾方案中最为重要也是最为关键的一环。在进行数据库数据同步设计时，需要考虑灵活的数据库同步方式，尤其在多数据库环境下。美创DBRA日志挖掘服务可实时读取生产端在线日志信息，由日志服务同步往容灾端写日志数据；在容灾端， SERVER进程接收日志服务传送过来的数据并且生成对应的灾备端的在线日志数据，在生产系统进行日志转换的时候同步在灾难备份中心完成日志转换，容灾端Apply Service通过物理恢复机制把相关在线日志内容更新到灾备中心数据库（实时更新模式），有效保障了容灾实时性。
美创灾难备份管理系统提供一键容灾切换功能，无论在灾难应急还是计划内维护切换（如生产业务系统升级、生产业务服务器维修等可计划事务下，无法设置太久停机维护窗口场景）时，均可以通过一个按键完成切换，整个流程自切换启动后全部自动化完成，极大降低了人为干预和切换耗时，极大保障了切换成功率，降低了RTO。为了提高切换成功率，整个自动化切换过程加入多种检查和监测机制，提高切换前健康状态检查（或可在日常维护时可以经常进行检查），并自动输出状态流信息，可以直观观察到各业务节点的状态，以便能够及时处理故障问题，提高切换成功率。
同时丰富的可视告警信息和图标，让生产数据库系统和灾备数据库系统的健康状态更加直观可视。
示意简图
保障核心数据安全和业务连续
1、修复原数据库中的数据坏块，解决了黑龙江省公安厅该数据库风险隐患。
2、采用可视化管理方式，当容灾同步异常等情况均能自动化发现并告警，有效解决依靠人工巡检被动发现的缺点。
3、采用一键式自动资源环境检查，告别传统人工检查及操作的方式，确保过程可控，同时能够在最短时间内进行切换，有效提高业务连续性。
4、美创灾难备份管理系统提供活动站点功能，有别于传统灾备环境中灾备数据中心纯粹作为灾备站点，创新地让容灾数据中心具备在线分担生产负载压力的能力，充分发挥更高价值，实现投资保护；
5、通过与黑龙江省公安厅管理预案的高度融合，让整个技术实现流程与管理制度流程保持高度一致，真正在灾难发生时，能够严格按照预案启动应急接管流程，避免了混乱现象的产生，让灾难恢复流程更高效，极大地保障整体RTO目标的成功实现。
请输入标题
请输入标题
请输入标题
请输入标题